
Ingénieur / Ingénieure données
Emploi Multimédia - Internet - SSII
-, 75, Paris, Île-de-France
Migration Datawarehouse - Nous recherchons un(e) Data Engineer expérimenté(e) Dans le cadre de la refonte du framework Data Warehouse de notre client, nous recherchons un(e) Data Engineer disposant d'une solide expérience sur Apache Airflow afin de concevoir from scratch le nouveau workflow d'orchestration et de migrer progressivement l'existant vers cette nouvelle stack technique. Un PoC Airflow est déjà en place : nous recherchons donc un profil capable de challenger les choix techniques, proposer des améliorations et nous guider dans la définition de l'architecture cible. Missions principales - Concevoir from scratch le nouveau workflow d'orchestration de données basé sur Apache Airflow (architecture des DAGs, gestion des dépendances, scheduling, monitoring). - Évaluer et challenger le PoC Airflow existant : analyser les choix réalisés, proposer des alternatives et orienter les décisions d'architecture. - Migrer les pipelines de données existants depuis l'ancien workflow vers la nouvelle plateforme. - Écrire et maintenir des tests unitaires, d'intégration et de non-régression pour garantir la qualité et la fiabilité des pipelines migrés. - Optimiser les[...]


















